原文标题：《メタバース普及の決め手は五感と教育、ポータブルVVスタジオが鍵》
原文刊发于《日经XTECH》网站
原文作者：伊藤元昭
元宇宙究竟能给大众带来什么？在迄今为止的诸多论述中，诸如能带来更好的沉浸式体验等这样的答案不难看到，但似乎都难以让人兴奋。日前，《日经XTECH》网站刊发了对东京理科大学科技管理专业（MOT）教授若林秀树的访谈。若林秀树教授指出，“让单身的人邂逅爱情，元宇宙能为此提供支持和帮助，这是第一个关键应用程序。”这一回答并非随意。若林秀树指出，随着技术发展，元宇宙的一大特征是能够支持利用五感来进行交流——即可以让人看起来就像在身边一样，听到立体的声音，用触觉握住手，拥抱肩膀，再现气味，全身都能享受双向的五感。“邂逅爱情”只是若林秀树教授答案中的一个。支持产业、支持教育发展，也被认为是元宇宙能发挥重要作用的领域。另外，若林秀树教授在受访中还分享了元宇宙能带来的产业机遇和风险。在机遇方面，便携式演播室（体积捕捉）、全息传感器套装、半导体和压缩技术等领域被认为存在快速发展的机会。而在风险方面，法律法规、税收等则因为存在不确定性，而成为元宇宙发展的风险因素。若林秀树教授还提出了一个重要思考。构建元宇宙社会需要大量的数据中心，消耗大量能源。但在碳中和的趋势下，现实世界和虚拟世界共存，虚拟世界应该占比多少呢？元宇宙世界到底应该多大？他认为这一问题值得追问。 共同虚拟对这篇报道进行了编译。本文旨在用于学术分享，不用于商业用途。东京理科大学研究生院 经营学研究科 科技管理专业教授。该专业英文简称MOT，即Management Of Technology。目前，若林秀树教授也是日本经济产业省半导体数字产业战略研讨会议的成员，JEITA半导体委员会政策建议工作组的主席（JEITA即Japan Electronics and Information Technology Industries Association）。若林秀树教授1984年毕业于东京大学工学部精密机械工学科，1986年毕业于东京大学研究生院工学系研究科精密工学专业。同年进入野村综合研究所，担任主任研究员。后曾在JP摩根证券创立日本股票部门，历任股票研究部董事、瑞穗证券首席分析师。2005年，若林秀树教授参与创立了日本股权投资管理公司的对冲基金，历任首席投资经理、董事长。期间担任东京理科大学研究生院名誉讲师（2007-2009年）、一般社团法人前半导体产业研究所咨询委员等。2014年若林秀树教授成立Circle-Cross集团，担任董事长。2017年起，担任founder名誉董事。同年担任东京理科大学创新研究科教授。2018年起担任现职。● 元宇宙能产生重要应用的包括三个领域，分别是支持利用全身五感来进行远程交流，支持产业与支持教育。● 元宇宙能带动的产业，包括能支持全身五感交流的技术领域，输入、输出、实时传输并能处理庞大信息等领域都会快速成长。这其中的关键包括便携式演播室（体积捕捉）、全息传感器套装、半导体和压缩技术等。● 元宇宙业务发展的风险主要来自于法律法规、税收等方面，产业发展的阻碍因素则来自于信息压缩、能源等方面。A：我认为元宇宙能产生重要应用的包括三个领域。一是支持利用全身五感来进行远程交流，二是支持产业，三是支持教育。先来说利用五感来支持远程交流。人最强烈的欲望，就是想见家人、恋人等喜欢的人。离得越远，就越迫切。满足感在五感俱全，全身心享受时到达巅峰。想看、想听、想摸、想闻、想尝，这是动物最本能的欲望。美国Zoom Video Communications的创始人Eric Yuan（袁征）居住在中国时，必须乘坐10个小时的电车才能与恋人见面。那种郁闷之情，催生了他开发视频会议系统的梦想。但是，Zoom在五感中只能满足视觉和听觉，而且只有正面视角，缺乏沉浸感。远没有真实感，也不能肌肤接触。元宇宙可以让人看起来就像在身边一样，听到立体的声音，用触觉握住手，拥抱肩膀，再现气味，全身都能享受双向的五感。穿上虚拟套装，或者用Volumetric技术（立体面显示技术，能实现动态3D效果，编者注）进入个人便携式演播室，两个人在世界的任何地方，从过去到未来，都能自由自在地旅行，像是成为了电影的故事主角。如果能做到这样，就超越了现实世界。我认为，在元宇宙时代，下一个需求是让单身的人邂逅爱情。元宇宙能为此提供支持和帮助，这是第一个关键应用程序。回想起来，上世纪80年代，相遇是在路边这一现实空间中发生的偶然事件。那时，见面的方式是写信或者打公用电话。因此，在涩谷的忠犬八公像前等待见面的悲剧，以及1950年代的电视剧《你的名字》中，在数寄屋桥（东京一家有名寿司店所在的地址，编者注）的擦肩而过，都是在没有智能手机的时代发生的故事。上世纪90年代后期到新世纪，拨号Q2出现了。据说手机在日本普及，其背景是男女间的“邂逅”。无论是松下和索尼之间出现的“VHS和β的标准化之争”，还是PC和游戏的显示器分辨率提高，其实这些高科技发展的背后，都离不开男女间的情感需求。因此，与爱欲对象之间的交流手段，从动画视频，再到元宇宙提供的虚拟空间，只要全身穿上双方都能享受五感的虚拟套装，即便对方实际上是老人、男性、或人形机器人，也会变成美丽的公主。这已经存在于影像中了。伴随着临场感的增加，声音、触感、气味、行为，都完全一致。即使不是本人，但你在元宇宙中依然能自由自在地接触到现实中倾慕的人、历史上的美女、甚至是已故的恋人。这也能解决有身体缺陷的患者，或者老年人们正常的需求。人类的爱欲，是最美妙的，也是最可怕的，这是残酷的历史事实。它和高科技是密不可分的，因此也会成为创新的动力。另外，还有减少犯罪的可能性。如果元宇宙的IT技术与生物技术进一步融合，或许还能对人类繁育造成影响。另一个关键应用是教育。东京理工大学的MOT专业，已经使用Zoom进行混合课程，让线上线下的学生都获得相同的参与感。教室中安装了多个AI相机，搭载了索尼和美国Bose公司的系统，能够共享教室的氛围，但这还远远不够。如果是在元宇宙中，看到的就不只是平面的露脸画面，而是有阶梯教室、大教室等场景，根据不同的讲课内容和学生，背景的环境也能自由切换。另外，就像观看体育比赛一样，可以从所有的自由角度再现课堂。摄像头分为“鸟眼”“虫眼”“鱼眼”等，能够俯瞰整个教室，也能在合适的时机，对焦发言者或者教科书，放大教科书上的图表和影像。像哈佛大学桑德尔教授（哈佛大学政治学教授，编者注）的课一样，教授和学生热烈互动，趣味性十足。课堂已经和游戏、电影没有区别，可以一边享受，一边有效学习。还可以与国外的大学授课相结合。一边听东京理科大学的MOT课程，一边和麻省理工学院、清华大学联系，大家可以一起讨论。来自世界各地的经营者作为特邀演讲者登场，也可以一起进行讨论。在这里甚至可以听到已故的优秀经营者和现任经营者的讨论，还可以听到已故著名教授的经典论述。此外，还有一个关键应用是可以参观世界各地的工厂。可以进入具有成套设备的工厂生产线，感受它的生产流量。进入防尘室中，仔细观察半导体的精细加工（其实VR参观工厂已经很火了，笔者两年前就已经用VR参观了加贺东芝电子工厂，从微观角度观察了NAND型闪存卡的内部构造）。对日本人来说很困难的语言学习，通过自动翻译也能解决。唯一的问题是时差，但通过技术革新，跨越时差，也能共享知识和感动。此外，AI还会根据学生的喜好，判断授课的速度、难易度以及内容。从喜欢的教授名单中，结合内容、氛围等，选出最适合这位学生的教授。既有教室授课，也有个人讲授、小班研讨等。疫情之后，在线远程授课已经让大学课程发生了巨大的变化，元宇宙使得这一动向进一步加速。现在的实验和实习基本还是面对面进行的，但今后会发生很大的变化。除了涉及物质和能量交换的活动，比如吃饭、桑拿、温泉、运动等，其他的活动可能会越来越虚拟，在元宇宙中进行。A：我认为能带动的产业主要围绕元宇宙需要的系统展开，包括能支持全身五感交流的技术手段，输入、输出、实时传输并能处理庞大信息等技术领域会快速成长。这其中的关键包括便携式演播室（体积捕捉）、全息传感器套装、半导体和压缩技术等。目前，输出型显示器是眼镜形状的，但在临场感和沉浸感方面较差。应该像全息成像的3D一样，环绕着自己。实际上，笔者在研究生之前的研究课题就是全息摄影。我很高兴这项了不起的技术终于开花结果了。当时，在漆黑的实验室里，我用激光进行全息照射，浮现出的立体图像让我印象深刻。全息摄影是丹尼斯·加博尔于1947年发明的。1971年被授予诺贝尔物理学奖，这项技术在全息存储器、光计算机等巨大市场中备受期待。但实际上，除了平视显示器等光学元件外，这项技术也仅用于艺术品和卡片防伪，真正的立体影像显示器很难投入使用。在输入系统方面，索尼等公司已经开发出了用于3D体积捕捉的便携式演播室。那是一个圆筒形的小房间，就像以前动画片里出现的瞬间移动装置一样。关键是如何扫描并拍摄3D，并且捕捉图像。相机领域出现了非常重要的创新，从目前的2D相机转变为自由视角相机，或者3D相机。扫描的技术，有的像CT（计算机断层扫描装置）那样扫描横截面，也有的是用有限要素法描摹物体的表面。在捕捉手法上，可以使用便携式演播室（像是科幻小说中的瞬间移动装置），也有使用手持式终端的方法。将来或许能把安装有各种传感器的“全息套装”投入到实际使用中。这种套装安装了灵活的图像传感器、麦克风、触觉分子传感器。在这种情况下，信息的输入和输出就可以融合在一体。无论如何，到了元宇宙时代，人人都会拥有一台3D便携式演播室，人们把它当作网络空间发布信息，或者享受交流的乐趣。现在的教室已经越来越像演播室了，也可以使用录音室，但自己购买还是很贵。但是，未来这种演播室会像智能手机一样不可或缺，变成私人物品，可以随时发送信息，进行交流。就像过去电脑的普及和大众化一样，从办公室或大学里只有一台电脑，发展到每个房间都有一台电脑。这种演播室也可以租赁，像厕所、公交车一样，到处都有便携式演播室。这样一来，演播室的市场就能被打开，就像现在人手都有一台电脑、手机、汽车一样。体积视频技术（VV—即Volumetric Video，也称体三维技术、空间视频、容积视频，编者注），已经在VR和AR领域受到关注。改善观看体育比赛的视听体验，在赛事和创意市场备受期待。以色列的风投企业、美国微软、索尼集团等也加入其中。根据调查公司的全球信息数据，世界VV市场的规模在2021年将达到19亿美元，到2028年将增长到97亿美元。最大的难题是传输系统。因为是3D的，所以信息量很大。过去我曾研究过全息成像的信息量，但由于激光在拍摄和再生时处于不同的条件中，所以很难计算。只有5G才能进行传输，但也需要各种压缩技术。3D图像压缩技术已经被应用于CAD绘图等领域，日本的风险企业Lattice Technology的XVL已经成为事实标准。但是，在CAD绘图的应用中，对象并不是动态的、运动的。但是在VV中，娱乐性和临场感很重要，3D图像是动态的、运动的。以色列的Mantis Vision公司认为，可以实现20Mbps的高画质，但重点是如何实现动画化、写实化。当然，半导体存储器和处理器也需要不断更新换代，需要建立更多的数据中心和光传输网络。A：我认为风险主要来自于法律法规、税收等方面，阻碍因素则来自于信息压缩、能源等方面。目前，元宇宙的应用暂时以五感中的影像和声音为中心，当然触觉也很有必要。另外，如何摄取气味也是一大难题。元宇宙的世界扩大后，就能直接将电极插入脑中，找到五感所在之处，呈现出梦和现实混合在一起的状态，类似于一种幻觉。我们可以利用生物技术，定制化的药物作用于大脑，形成大脑图谱后，就能对脑部进行局部刺激（药物传输）。即使没有到达这种地步，GAFA已经开始研究人脑，将心理学的知识运用于营销和广告中，利用消费者的智能手机，可以把握住消费者的心理。如果到了元宇宙中，对消费者的影响就更大了。元宇宙平台可以汇集更多有关个人身体健康的具体信息。这种数据会对医学发展有益，也能给运动医学带来很大的贡献。在艺术和电影中，对人物形象的立体建模也很有帮助。另一方面，在元宇宙中，虚拟的人像、伪装很容易做到，所以个人身份认证也会变得困难。因此，指纹和静脉识别也会变得更加困难。在商业活动中，法律尚不完善，犯罪需要用道德来评判。特别是元宇宙中虚拟的约会和接触，是否属于出轨、不贞，还是一种骚扰行为呢？此外，家庭、员工、居民的概念也都会发生转变。虽然会发展成巨大的商业体系，但同时网络社会中发生的问题也会变得更加严重。另外，构建元宇宙社会需要大量的数据中心，消耗大量能源。而且它绝对不是免费的。还有空间地址的问题，如何纳入税收制度的问题。在碳中和环境下，现实世界和虚拟世界共存，虚拟世界应该占比多少呢？元宇宙世界到底应该多大，是我们需要思考的问题。总之，五种感官中，与嗅觉和味觉相联系的食物、药物，乃至衣物是真实的。但是，左脑主要使用视觉、听觉来工作学习，与虚拟相联系也是理所应当，再加上右脑支配的触觉带来的娱乐性，不知不觉之间，现实与虚拟之间的区别可能会逐渐消失。